MAVIS: Multi-Agent Video Retrieval via Structured Video Understanding
MAVIS:基于结构化视频理解的多智能体视频检索
🧭 多智能体视频检索 · 结构化语义理解 ★ 深度解读
Great Bay University · Nankai University · Tsinghua University · The University of Tokyo
用多智能体协作+逻辑否决辩论代替全库暴力搜索,实现免训练且高效的视频检索。
📌 工作参考价值(4 点)
- 结构化属性索引思路可迁移:将商品/素材预解析为场景、对象、动作等属性库,实现按语义类别快速查找,避免每次检索都扫描全库,适合电商多模态搜索和推荐。
- 多智能体协作的逻辑否决机制:多个专家代理独立提名候选,再通过严格否决协议排除逻辑冲突项,这一思路可直接用于推荐系统的多维度一致性校验(如类目、属性、用户画像冲突过滤),减少错误推荐。
- 免训练的零样本流程:利用现成 MLLM 和 VLM 完成任务,无需微调,大幅降低业务落地时对标注数据和 GPU 资源的依赖,适合快速迭代的电商场景。
- 可解释的粗到细检索范式:先粗筛后细排,且每个代理的决策过程可追溯,便于在线 debug 和规则干预,对高可靠要求的电商搜索解释性有借鉴意义。